关键词: Scaling Law,数据集,LLM,AI,大模型

训练数据的数量和质量，对LLM性能的重要性已经是不言自明的事实。然而，Epoch AI近期的一篇论文却给正在疯狂扩展的AI模型们泼了冷水，他们预测，互联网上可用的人类文本数据将在四年后，即2028年耗尽。

关键词: Ilya,Scaling Law,chatGPT,openai

2003年夏天的一个周日，AI教父Hinton在多伦多大学的办公室里敲代码，突然响起略显莽撞的敲门声。

关键词: 模型训练,Scaling Law,思维链,扩展定律,AI

在 AI 领域，扩展定律（Scaling laws）是理解 LM 扩展趋势的强大工具，其为广大研究者提供了一个准则，该定律在理解语言模型的性能如何随规模变化提供了一个重要指导。

关键词: Scaling Law,AI,模型训练,华为AI,Transformer

“Scaling Law不是万金油”——关于大模型表现，华为又提出了新理论。

关键词: AI创业,Scaling Law,AI企业,AI商业化

AI-Native 的应用 Day One 就应该收费。这几乎是开发者当下的共识。

关键词: GPT-3.5,微软,Phi-3,微软AI,Scaling Laws

过去几年，借助Scaling Laws的魔力，预训练的数据集不断增大，使得大模型的参数量也可以越做越大，从五年前的数十亿参数已经成长到今天的万亿级，在各个自然语言处理任务上的性能也越来越好。

关键词: AI,商汤,AIGC,Scaling Laws,尺度定律

“中国有世界上最好最优秀的B端和C端市场，把做AI应用的门槛和成本降下来，就会激发出更大的产业应用空间。”

关键词: 具身智能,Scaling Law,Google RT-2,Figure 01,AI机器人

Google RT-2、Figure 01 机器人、特斯拉 Optimus 等的新演示让「具身智能」这一概念成为了机器人和大模型领域的热门话题

关键词: Scaling Law,大模型,算力,无问芯穹,国产大模型

CUDA 是英伟达的壁垒， 推理场景是算力未来的重点

关键词: GPT,扩散模型,Scaling Law,VAR,

新一代视觉生成范式「VAR: Visual Auto Regressive」视觉自回归来了